Tổ tiên của họ Loan là Tân Phụ, vốn mang họ Cơ, thuộc dòng dõi công thất nước Tấn. Tân Phụ có công phò tá Khúc Ốc Hoàn Thúc tranh ngôi với chi trưởng nên được phong ở ấp Loan, từ đó lấy chữ Loan làm họ, truyền dần đến đời Loan Chỉ. Loan Chỉ theo giúp Tấn Văn công xưng bá chư hầu, được phong làm Hạ quân tướng, thống lĩnh Hạ quân, từ đó trở nên một gia tộc lớn. Loan Chỉ sinh Loan Thuẫn, Loan Thuẫn sinh Loan Thư. Sau khi Loan Thuẫn qua đời, Loan Thư lên nối chức cha làm đại phu. Năm 597 TCN, ông được phong làm Hạ quân tá.